DataClaw0: Agentic Tailoring Multimodal Data from Raw Streams
DataClaw0:从原始多模态流中代理式剪裁数据的可学习精炼模型
🧭 代理式多模态数据精炼与合成
Xi'an Jiaotong University · University of Chinese Academy of Sciences · Shenzhen University of Advanced Technology · Tsinghua University
将数据处理从被动标注提升为可学习的代理式剪裁,用SFT+GRPO训练9B模型,生成高信息密度多模态数据以高效驱动下游任务。
📌 工作参考价值(4 点)
- 电商多模态数据清洗与增强:借鉴Factual Anchors思想,对商品视频、直播切片、详情页截图等原始流,先抽取确定性事实(如商品属性、价格、功能演示片段)作为锚点,再围绕锚点生成问答、描述、指令数据,可大幅提升推荐模型训练数据的信噪比与信息密度。
- Agent行为轨迹的结构化:在广告投放决策、智能客服等场景中,Agent的操作日志冗余且混杂。可训练小型精炼模型(类似DataClaw0),自动识别关键决策点、去重、补全因果链,将原始轨迹转化为高质量的推理训练样本,用于RLHF或post-training。
- 低成本迭代式数据精炼:两阶段合成流水线(事实锚提取+生成式语义合成)可离线运行,不依赖昂贵人工标注;工程上可将精炼模型作为数据pipeline的微型agent,对新入库的UGC内容持续精炼,构建动态更新的高质量数据池。
- 数据质量评估范式的迁移:直接用下游任务(如推荐召回、CTR预估)的post-training效果来反向验证数据精炼质量,将离线质量评估与在线业务指标对齐,避免仅靠人工抽查导致的数据偏差。